Het kasteel werd in 1858 gebouwd in mengstijl met neo-Lodewijk XV- en neo-Lodewijk XVI-elementen. In 1864 werd het kasteel een eerste maal verbouwd om uiteindelijk in 1901 haar huidige vorm aan te nemen onder Ernest Van Dijck.
De tenor Ernest Van Dijck (1861-1923) genoot wereldfaam als Wagner-vertolker en schitterde in zowat alle prestigieuze operahuizen ter wereld. Tot aan zijn dood in 1923 resideerde hij in het Berlaarhof. Later kocht ereconsul Ernest Vanderlinden het kasteel, tot hij in 2010 overleed. Het Berlaarhof werd toen het onderwerp van een erfeniskwestie, waardoor het te koop werd gesteld. Na een lange leegstand kocht de gemeente Berlaar in 2018 het domein.
Het historisch park, beheert door de vzw Kempens Landschap en de gemeente, werd toegankelijk en opengesteld voor bezoekers. Het kasteel kreeg een maatschappelijke invulling met het woonconcept ‘VillaVip’, een innovatief kleinschalig woonconcept voor mensen met een beperking.